Gia tộc Đỗ Cao của tướng Đỗ Cao Trí nguyên gốc ở Triều Châu, Trung Hoa. Về sau, cụ Tổ 4 đời di cư sang Việt Nam định cư ở Cù lao Mỹ Quới, bên dòng sông Đồng Nai thuộc Tân Uyên, tỉnh Biên Hòa.
Thân phụ: Cụ Đỗ Cao Lụa
Thân mẫu: Cụ Tô Thị Định (Hai cụ sinh được 12 người con gồm 10 trai, 2 gái).
Bào huynh: Ông Đỗ Cao Minh (Nha sĩ)
Bào muội: Bà Đỗ Thị Ánh Tuyết (Phu nhân của Thiếu tướng Dương Ngọc Lắm)
Phu nhân: Bà Võ Thị Lan Phương (Hiện đang sống cùng con cháu tại Canada. Bà là con gái của Cụ Võ Văn Vân, nguyên quán Thủ Dầu Một).
Ông bà có hai người con: 1 trai, 1 gái: -Quý nữ: Đỗ Thị Phương Loan (định cư ở Pháp). -Quý nam: Đỗ Cao Dũng (định cư ở Canada).